注册 登录
中国神经科学论坛 返回首页

chenghwn的个人空间 https://bbs.bioguider.com/?68 [收藏] [复制] [分享] [RSS]

日志

智能软件对环境的适应

已有 477 次阅读2015-5-2 21:35 |个人分类:智能科学

对智能软件来说,随时都有主注意目的对象,主注意对象,感觉传入,各种回忆并产生影响(在每个兴奋周期都有对主注意目的对象,主注意对象,感觉传入,各种回忆的读写。select case zsk 123,分别表示对记录在展示框中的主注意目的对象,主注意对象,感觉传入的读写计算)。

一般情况下,越能带来奖赏的思想行为,越是被智能机器人认知为有益的思想行为(这是我们设计奖赏刺激的目的,与我们的设置有关。越是有益的思想行为越是能带来更多的奖赏)。

主注意目的对象,是智能机器人在环境状态下,认识到的最能带来奖赏的(奖赏越强,动力越强。(下面这些程序主要是根据我的理论进行了编程设置,一些参数与关系的设置还需要大改进)下面这段程序计算的是,注意到的相对稳定的最能带来奖赏(动力最强)的对象成为主注意目的对象。if jslabel=>3 and yaacyqjs >qdmdjcyq*1.30 then

 qdjcyq = yaacyqjs

Mdjclabel= Mdjclabel +1 ‘目的奖惩标志Mdjclabel

Call qmdjrzsk(Mdjclabel, labelnumber, labelrecordnumber )

If Mdjclabel=7 then ‘主注意目的对象正式确定。注意对象的动力预期稳定,而且新的总动力预期大于老的总动力预期

 For Mdjclabel=2 to 5 ‘保证选取的主注意目的对象的正确性。

Dqlabel=jclabel(Mdjclabel)+ Dqlabel

Next

Put 1, qlabelrecordnumber, Dqlabel

 For dq=1 to Dqlabel

Get 10,jclabel(1)+1+dp,mddx

Put 1, dq+ qlabelrecordnumber, mddx  ‘记入主注意目的展示框

Next

Else

Get 1, labelrecordnumber, recordnumberlabel

Put 1, qlabelrecordnumber, recordnumberlabel

For recordnumber=1 to recordnumberlabel

 Get 1, labelrecordnumber+ recordnumber,xfrecordnumber

 Put 1, qlabelrecordnumber+ recordnumber, xfrecordnumber

next

End if

end if

 

if jslabel=>3 then

qdmdjcyq = yaacyqjs  ‘目的对象的动力预期值发生改变持续到下一周期。

30%label=0

end if)。

 

 

与主注意目的对象建立的记忆联系强的往往是与奖惩密切联系的对象(这样的对象往往成为过主注意对象与主注意目的对象)。下面的小程序是主注意目的对象与主注意对象在状态中枢的记忆强弱的计算。这些计算表明了,与奖惩关系越强的对象,其与其它对象在状态中枢建立的记忆联系越强,由于状态中枢的易化作用,就会带来其与其它对象建立的记忆联系越强。

主注意目的对象

jxfrecordnumber=xfrecordnumber+zrecordnumber

cxfrecordnumber=xfrecordnumber+zrecordnumber*2

get 8,xfrecordnumber-78+67+label-1*3+2, tcxfqda

get 8,jxfrecordnumber-78+67+label-1*3+2, jjyzxfqd

get 8,cxfrecordnumber-78+67+label-1*3+2, cjyzxfqd

兴奋到一定程度传入对应的皮质中枢

 

n=Qdmdjcyqpjjcqd  '奖惩预期强度除以平均奖惩强度

n1= Acyqjspjjcqd

zzymddxqd=pjxfqd*n*1.3+ tcxfqda+ pjxfqd*n1  '获得主注意目的对象的兴奋强度

(这个等式表明了,主注意目的对象的兴奋强度zzymddxqd,与主注意目的对象的动力Qdmdjcyq,主注意对象对应的动力Acyqjs及它受到的易化密切相关。而兴奋越强,记忆会越强。)

主注意对象引起的动力改变与主注意目的对象建立记忆联系。

if n1>0 then

jjyzxfqd= pjxfqd*n1*1.2 + jjyzxfqd

else

cjyzxfqd= -pjxfqd*n1*1.2 + cjyzxfqd

end if

jyzxfqd=zzymddxqd

put 8,xfrecordnumber-78+67+label -1*3+2, jyzxfqd

put 8,jxfrecordnumber-78+67+label-1*3+2, jjyzxfqd

put 8,cxfrecordnumber-78+67+label-1*3+2, cjyzxfqd

主注意目的对象的记忆xfjy与传出兴奋xfcc

call xfjy(jxfrecordnumber,qlabel,subjyzrecordnumber,qzqtime,zrecordnumber, zqtime,zskz)

call xfjy(cxfrecordnumber,qlabel,subjyzrecordnumber,qzqtime,zrecordnumber, zqtime,zskz)

call xfjy(xfrecordnumber,qlabel,subjyzrecordnumber,qzqtime,zrecordnumber, zqtime,zskz)

call xfcc(xfrecordnumber,qlabel,subjyzrecordnumber,qzqtime,zrecordnumber, zqtime,zsk,z)

 

主注意对象

jcjyzxfqd=jjyzxfqd-cjyzxfqd+ Acyqjs+ Qdmdjcyq

(这个等式表明了,主注意对象的兴奋强度jyzxfqd,与主注意目的对象的动力Qdmdjcyq,主注意对象对应的动力Acyqjs及它受到的易化密切相关。而兴奋越强,记忆会越强。)

 

n=jcjyzxfqdpjjcqd       ‘除于基础奖惩兴奋

if n>=0 then

jyzxfqd=3*n*jyzxfqd   ‘主的兴奋强度

jjyzxfqd=jjyzxfqd+jyzxfqd5

else

jyzxfqd=2*jyzxfqd   ‘主的兴奋强度

cjyzxfqd=cjyzxfqd+jyzxfqd5

end if

jxfrecordnumber=xfrecordnumber+zrecordnumber

cxfrecordnumber=xfrecordnumber+zrecordnumber*2

put 8,xfrecordnumber-78+67+qlabel-1*3+2, jyzxfqd

put 8,jxfrecordnumber-78+67+qlabel-1*3+2, jjyzxfqd

put 8,cxfrecordnumber-78+67+qlabel-1*3+2, cjyzxfqd

call xfjy(jxfrecordnumber,qlabel,subjyzrecordnumber,qzqtime,zrecordnumber, zqtime,zskz)

call xfjy(cxfrecordnumber,qlabel,subjyzrecordnumber,qzqtime,zrecordnumber, zqtime,zskz)

call xfjy(xfrecordnumber,qlabel,subjyzrecordnumber,qzqtime,zrecordnumber, zqtime,zskz)

call xfcc(xfrecordnumber,qlabel,subjyzrecordnumber,qzqtime,zrecordnumber, zqtime,zsk,z)

 

下面的小程序表示状态中枢兴奋的记忆柱对相应的皮质基本记忆柱群的易化或抑制。

'易化皮质对应的基本记忆柱群。

get 8,xfrecordnumber-78+87,xfrecordnumber

 

jcjyzxfqd=jjyzxfqd-cjyzxfqd+pjxfqd*n1*1.2

n=jcjyzxfqd/pjjcqd       ‘除于基础奖惩兴奋

if n>=0 then

jyzxfqd=n*jyzxfqd+ tcxfqda   ‘主的兴奋强度

jjyzxfqd=jjyzxfqd+jyzxfqd/5

else

jyzxfqd=-1/n*jyzxfqd+ tcxfqda   ‘主的兴奋强度

cjyzxfqd=cjyzxfqd+jyzxfqd5

end if

 

jyzxfqd=jyzxfqd3

zjjyzxfqd=jyzxfqd

zsk=5

Call cjcr(qlabelrecordnumber,xfrecordnumber, xfqdrecordnumber, zqtime, qzqtime,labeljyzxfqd,zsk)

xfrecordnumber=xfrecordnumber+zrecordnumber

jyzxfqd=zjjyzxfqd

zsk=6

Call cjcr(qlabelrecordnumber,xfrecordnumber, xfqdrecordnumber, zqtime, qzqtime,labeljyzxfqd,zsk)

 

通过上面的讨论可知:奖赏使对象之间记忆联系得到强化,奖赏越强,得到的强化越强。

通过长期的奖惩学习所建立的记忆系统,使在实现主注意目的的过程中,被主注意目的对象易化的越强的往往是与奖惩关系越强的,在注意目的,亚主注意目的,主注意对象,环境刺激下,注意与回忆的往往是与奖惩关系密切的对象。(对惩罚进行注意,有利于逃避惩罚。)


路过

雷人

握手

鲜花

鸡蛋

评论 (0 个评论)

facelist doodle 涂鸦板

您需要登录后才可以评论 登录 | 注册

小黑屋|手机版|Archiver|生物行[生物导航网] ( 沪ICP备05001519号 )

GMT+8, 2024-9-21 11:25 , Processed in 0.017247 second(s), 18 queries .

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

返回顶部